Python Job: Data Engineer (H-F)

Datapy est une entreprise en pleine croissance d’expertise en Data et Automatisation. Depuis 3 ans nous apportons à nos clients grandes entreprises des compétences pour leur permettre d’utiliser au mieux leurs données, et maintenant qu’elles deviennent centrales à leurs opérations, pour industrialiser leur traitement.

Nos équipes sont constituées des deux cofondateurs, d’une équipe commerciale et d’une quarantaine de consultants salariés ou freelances.

Descriptif mission et compétences requises

Nous proposons des parcours constitués de missions significatives (1 à 3 ans) permettant de monter solidement en compétences sur des technologies, et de se former en parallèle à d’autres technologies pour les mettre en pratique dans la mission suivante.

Votre première mission consiste dans la construction de bout en bout d’applications permettant d’exploiter des données:

• Cadrage de la question, des besoins et de la problématique.
• Ingestion des données depuis les systèmes existants
• Modélisation et transformation de données via Spark
• Développement, déploiement et optimisation de jobs Spark
• Création des tables, analyse et recherche d’informations dans les bases de données
• Développement des reportings et outils d’analyse et visualisation des données
• Utilisation de technologies et méthodes de DevOps pour industrialiser les projets

Stack technique

• Spark
• Langage: Scala; Python est souvent utilisé aussi.
• Infrastructure selon le contexte du client et vos compétences: Hadoop, Azure, AWS ou GCP, avec souvent des projets de migration
• CI/CD et Devops: Terraform, Ansible, Jenkins, Azure Devops, GitLab, JUnit, Sonarqube, Kubernetes, Docker

Pour cela:

• Vous avez une première expérience significative en Spark et Scala

Le processus de sélection comprend un entretien avec un responsable Datapy, un entretien avec notre client permettant de préciser finement la mission, et éventuellement un test technique auquel vous pourrez vous préparer.

Type d'emploi : Temps plein, CDI
Statut : Cadre

Salaire : 38 000,00€ à 65 000,00€ par an

Horaires :

• Périodes de travail de 8 heures

Expérience:

• spark: 2 ans (Exigé)